Metric	Score
Weighted-F1	8.42
Hyphens-F1	100.00
Comma-F1	8.07
Ellipsis-F1	12.11
Fullstop-F1	9.46
QMark-F1	0.00
Colon-F1	100.00
Excl-F1	0.00

Metric	Score
Weighted-F1	68.79
Hyphens-F1	80.00
Comma-F1	66.01
Ellipsis-F1	21.24
Fullstop-F1	88.31
QMark-F1	47.37
Colon-F1	100.00
Excl-F1	0.00

worst items

note: the gold standard is taken from the challenge

#	input	expected output	actual output	test-A QMark-F1
1	audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Przepraszam:120660-121020 ale:121320-121410 ale:121530-121620 czy:121740-121770 j…	O O O O O O O O O O O O O O O O O O O O O O O O B-QMARK	O O O O O O O O O O O O O O O O O O O O O O O O O	0.00
2	audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Tak:198870-199020 co:199140-199170 powinienem:199260-199560 ze:199650-199680 sobą…	O O O O O O O O B-QMARK	O O O O O O O O O	0.00
3	audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Proszę:231570-231720 pana:231780-231930 skąd:232050-232380 wezmę:232440-232740 te…	O O O O O O B-QMARK	O O O O O O O	0.00
4	audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Wie:264390-264450 pan:264510-264600 co:264720-264750 ja:264960-264990 nie:265110-…	O O O O O O O O O O O O O O O O O O O O O O O O B-QMARK	O O O O O O O O O O O O O O O O O O O O O O O O O	0.00
5	audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Jasne:302790-303390 Proszę:347100-347340 pana:347430-347610 korzystając:347640-34…	O O O O O O O O O O O O O O O O O O O O O B-QMARK	O O O O O O O O O O O O O O O O O O O O O O	0.00
6	audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Czterdzieści:33300-33600 siedem:33660-33840 Dziękuję:33930-34290 bardzo:34350-346…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-QMARK	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O	0.00
7	audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Mhm:128910-128970	B-QMARK	O	0.00
8	audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Mhm:202080-202110	B-QMARK	O	0.00
9	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Dzień:10800-10980 dobry:11100-11280 Joanna:11310-11490 Darkowska:11640-11640 No:12…	O O O O O O O B-QMARK O O O O O O O O O O O O O	O O O O O O O O O O O O O O O O O O O O O	0.00
10	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Co:21330-21390 się:21450-21570 dzieje:21630-21990 No:22200-22230 w:22320-22320 ogó…	O O B-QMARK O O O O O O O O O O O B-QMARK O O O O O O	O O O O O O O O O O O O O O O O O O O O O	0.00
11	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 I:46200-46200 co:46320-46350 jeszcze:46380-46590	O O B-QMARK	O O O	0.00
12	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Nie:84420-84450 no:84540-84570 nie:84840-84870 Na:85020-85050 jaką:85110-85290 kwo…	O O O O O O O O O B-QMARK	O O O O O O O O O O	0.00
13	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Cztery:94770-95010 Ale:95100-95190 dlaczego:95250-95520 aż:95580-95610 tak:95700-9…	O O O O O B-QMARK O O O O O O O O O O O O O O O B-QMARK	O O O O O O O O O O O O O O O O O O O O O O	0.00
14	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 ta:110250-110310 ta:110610-110670 ta:110820-110850 ta:110970-111000 kwota:111030-1…	O O O O O O O B-QMARK	O O O O O O O O	0.00
15	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 O:131820-131820 Boże:134790-135090 No:135510-135570 ale:135600-135690 To:135780-13…	O O O O O O O O O O O O O O O O O O O O O O O O O O B-QMARK	O O O O O O O O O O O O O O O O O O O O O O O O O O O	0.00
16	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Jakie:145620-145800 odsetki:145860-146280 Przecież:146340-146610 ja:146670-146700 …	O B-QMARK O O O O O O O O O O O O O O O O	O O O O O O O O O O O O O O O O O O	0.00
17	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 przecież:151350-151590 potem:151680-151830 to:151890-151950 wszystko:151980-152220…	O O O O O O O O O O O B-QMARK	O O O O O O O O O O O O	0.00
18	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 żebyście:168270-168600 państwo:168660-168900 znowu:168960-169170 włączyli:169260-1…	O O O B-QMARK O O O O O O O O O O O O	O O O O O O O O O O O O O O O O	0.00
19	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 A:182700-182700 możecie:182730-182940 już:182970-183060 państwo:183150-183390 włąc…	O O O O O O O O O O B-QMARK	O O O O O O O O O O O	0.00
20	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Czyli:196830-196950 co:197100-197130 ja:197220-197250 mam:197310-197370 zrobić:197…	O O O O B-QMARK	O O O O O	0.00
21	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Muszę:197700-197850 tylko:197910-198120 mam:198210-198300 tylko:198360-198510 możl…	O O O O O O O O O O O O O O O O B-QMARK	O O O O O O O O O O O O O O O O O	0.00
22	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 w:219930-219930 tej:219990-220080 ciemności:220110-220620 dopóki:220680-220950 nie…	O O O O O B-QMARK O O O	O O O O O O O O O	0.00
23	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Dobra:231090-231360 no:231510-231540 to:231660-231690 no:232020-232050 to:232170-2…	O O O O O O O O O O O O O O O O O B-QMARK	O O O O O O O O O O O O O O O O O O	0.00
24	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Tak:53790-53910 To:54000-54030 poproszę:54120-54480	B-QMARK O O	O O O	0.00
25	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Wie:125970-126030 pani:126120-126240 co:126330-126360 Chwileczkę:126420-126780 Nie…	O O B-QMARK O O O O O O O O O O O O O O O O O O	O O O O O O O O O O O O O O O O O O O O O	0.00
26	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 To:141600-141630 ze:141750-141810 względu:141870-142140 na:142200-142260 notę:1423…	O O O O O O B-QMARK O O O O	O O O O O O O O O O O	0.00
27	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Wie:186840-186960 pani:187080-187260 co:187440-187500 No:187590-187650 należy:1877…	O O B-QMARK O O O O O O O O O O O O O O O O	O O O O O O O O O O O O O O O O O O O	0.00
28	audio/cbiz_tc_41.wav 3896bb9d-e80e-458e-9695-4f7427c1abdf to:197190-197370 mogłaby:197460-197700 pani:197790-197910 mi:198300-198480 teraz:1…	O O O O O O O O O O O O O O O O O B-QMARK	O O O O O O O O O O O O O O O O O O	0.00
29	audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 Dziękuję:44370-44700 pani:44760-44910 bardzo:44970-45300 I:45420-45510 adres:45600…	O O O O O O O O O O O O B-QMARK O B-QMARK	O O O O O O O O O O O O O O O	0.00
30	audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 czwartego:74130-74610 maja:74760-75030 i:75750-75750 pani:75900-76110 mówi:76350-7…	O O O O O O O O O O B-QMARK O O O B-QMARK	O O O O O O O O O O O O O O O	0.00
31	audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 Tylko:135840-136020 proszę:136110-136260 powiedzieć:136350-136680 Rozumiem:136830-…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-QMARK	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O	0.00
32	audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 z:162330-162330 tą:162420-162510 fakturą:162570-163020 Gdyby:163140-163410 tak:163…	O O O O O O O O O O O O O O B-QMARK O O O O O O O O O O O O O O O O O	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O	0.00
33	audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 W:265860-265860 tytule:265950-266250 po:266880-266940 prostu:267000-267270 proszę:…	O O O O O O O O B-QMARK O O O O O O O O O	O O O O O O O O O O O O O O O O O O	0.00
34	audio/cbiz_tc_24.wav e2a8a04f-2a58-4361-8d2b-c92bb50a7081 Darkowska:13410-13440 No:14550-14580 wie:14670-14730 pani:14820-14970 co:15120-151…	O O O O B-QMARK O O O O O O O O O O O O O O O O O O O O O O	O O O O O O O O O O O O O O O O O O O O O O O O O O O	0.00
35	audio/cbiz_tc_24.wav e2a8a04f-2a58-4361-8d2b-c92bb50a7081 No:68400-68460 nie:68850-68880 Nie:69180-69210 dostałam:69270-69870 no:69990-70020…	O O O O O O O O O O O O B-QMARK O O O O O O	O O O O O O O O O O O O O O O O O O O	0.00
36	audio/cbiz_tc_24.wav e2a8a04f-2a58-4361-8d2b-c92bb50a7081 No:122910-122940 ale:123000-123090 to:123210-123270 najpierw:123330-123630 jeżeli:…	O O O O O O O O O O O O O O O B-QMARK O O O O O O O O O	O O O O O O O O O O O O O O O O O O O O O O O O O	0.00
37	audio/cbiz_tc_24.wav e2a8a04f-2a58-4361-8d2b-c92bb50a7081 I:148740-148740 może:148800-148950 może:149040-149160 może:149430-149550 się:14961…	O O O O O O O O B-QMARK	O O O O O O O O O	0.00
38	audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 A:26580-26580 kiedy:26670-26850 składała:26910-27210 pani:27300-27420 reklamację:2…	O O O O B-QMARK	O O O O O	0.00
39	audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 A:36150-36150 na:36450-36510 kogo:36600-36780 została:36870-37170 zawarta:37260-37…	O O O O O B-QMARK	O O O O O O	0.00
40	audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 Tak:41760-41850 a:42180-42180 mogę:42570-42720 prosić:42990-43320 o:43380-43380 im…	O O O O O O O O B-QMARK	O O O O O O O O O	0.00